MonkeyOCRv2: A Visual-Text Foundation Model for Document AI
MonkeyOCRv2:面向文档AI的视觉-文本基础模型
🧭 文档视觉预训练 · 多模态基础模型
Huazhong University of Science and Technology · Kingsoft Office
面向文档图像的视觉-文本预训练模型,通过联合生成与重建策略提升多任务性能,冻结后可作为高效的多模态LLM视觉编码器
📌 工作参考价值(4 点)
- 商品图像文本增强:联合生成与像素重建的预训练策略对字符笔画和布局高度敏感,可直接用于提升电商商品图、广告素材的OCR准确率,特别是小字、艺术字、复杂背景下的关键信息提取。
- 高效商品文档解析:冻结MonkeyOCRv2+轻量LM(0.7B)即可获得SOTA文档解析效果,推理开销远低于通用大模型,适合大规模商品描述、质检报告、报关单据的结构化信息抽取。
- 多语言支持:预训练涵盖17种语言,对国际化电商平台处理多语言商品标题、评论图片、广告文案有直接帮助,无需额外语言适配。
- 篡改检测与内容审核:模型在文档篡改检测上的强大能力可迁移至商品图片真伪鉴定、用户评论截图真实性审核等风控场景。